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ROBERT BOSCH GMBH, 70442 Stuttgart 



Fahrdvnamikregelung mit Bildsensorsvstem 
Stand der Technik 

Die Erfindung betrifft ein Verfahren und eine Vorrichtung zur Fahrdynamikregelung in einem 
Kraftfahrzeug mit wenigstens einem Bildsensorsystem, bestehend aus wenigstens zwei 
Bildsensoren, die im wesentlichen dieselbe Szene aumehmen. 

Vorrichtungen und Verfahren zur Fahrdynamikregelung in einem Kraftfahrzeug sind bekannt. 
Beispielsweise ist in Zanten, Erhardt, Pfaff: „VDC, The Vehicle Dynamics Control System of 
Bosch", Konferenz-Einzelbericht, Vortrag: International Congress and Exposition, 
27.2. - 2.3.1995, Detroit, Michigan, SAE-Paper 950759, 1995 eine Vorrichtung und ein 
Verfahren zur Fahrdynamikregelung in einem Kraftfahrzeug beschrieben. Die 
Fahrdynamikregelung ist ein System, um das Kraftfahrzeug stabil und in der Spur zu halten. 
Dies wird durch gezieltes Bremsen einzelner Rader des Kraftfahrzeuges erreicht. Dazu wird 
mittels Sensoren der Fahrerwunsch, also das Sollverhalten des Kraftfahrzeuges, und das 
Fahrzeugverhalten, also das Istverhalten des Kraftfahrzeuges, ermittelt. In einer 
Verarbeitungseinheit/Steuereinheit wird der Unterschied zwischen dem Sollverhalten und dem 
Istverhalten als Regelabweichung ermittelt und die einzelnen Aktoren, beispielsweise die 
Radbremsen, mit dem Ziel der Minimierung der Regelabweichung gesteuert. Als Sensoren 
werden insbesondere Giergeschwindigkeitssensoren, Querbeschleunigungssensoren, 
Lenkradwinkelsensoren, Vordrucksensoren und Drehzahlsensoren verwendet. Hinweise auf die 
Verwendung wenigstens eines Bildsensorsystems bestehend aus wenigstens zwei Bildsensoren, 
die im wesentlichen dieselbe Szene aufnehmen, fehlen hier. 

Vorteile der Erfindung 
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Das nachfolgend beschriebene Verfahren und die Vorrichtung zur Fahrdynamikregelung in 
einem Kraftfahrzeug mit wenigstens einem Bildsensorsystem, wobei wenigstens zwei 
Bildsensoren vorgesehen sind, die im wesentlichen dieselbe Szene aufnehmen, haben den 
Vorteil, dass Bildsensorsysteme in Kraftfahrzeugen fur den Einsatz in weitere Funktionen 
vorgesehen sind. Besonders vorteilhaft sind Stereokameras. Bildsensorsysteme und 
Stereokameras kQnnen beispielsweise als Bestandteil einer automatischen 
Geschwindigkeitsregelung und/oder Abstandsregelung, beispielsweise im System des Adaptive 
Cruise Control (ACC), in einem Kraftfahrzeug eingesetzt werden. Die Verwendung desselben 
Bildsensorsystems fur mehrere Funktionen fiihrt zu einer Reduzierung der Kosten fur solche 
Systeme, weil die Kosten pro Funktion gesenkt werden. Besonders vorteilhaft ist der Anschluss 
des Bildsensorsystems und/oder der Stereokamera an eine Sensorplattform, bei der verschiedene 
Sensoren an einem Datenbus angeschlossen sind und von verschiedenen Steuergeraten 
synergetisch genutzt werden. Dies fuhrt zu einer weiteren Senkung der Kosten pro Funktion. 
Damit wird eine weite Verbreitung der beschriebenen Funktionen in Kraftfahrzeugen 
ermoglicht. Speziell eine weite Verbreitung der Fahrdynamikregelung in Kraftfahrzeugen, die 
sich im Verkehrsraum befinden, fuhrt insgesamt zu einer Erhohung der Verkehrssicherheit. 

Vorteilhaft ist die Bestimmung wenigstens eines Messwertes aus den erzeugten 
Bildinformationen, wobei der Messwert zur Fahrdynamikregelung verwendet wird. Durch die 
Bestimmung des wenigstens einen Messwertes, wird eine einfache Anbindung des 
Bildsensorsystems an die Fahrdynamikregelung ermQglicht, da ein definierter Messwert fur die 
Fahrdynamikregelung zur Verfilgung steht. Dies ermoglicht eine einfache Adaptation eines 
Bildsensorsystems an die Fahrdynamikregelung, da die spezifischen Eigenschaften des 
Bildsensorsystems, wie raumliche Auflosung und/oder Grauwertaufiosung und/oder 
Farbaufiesung und/oder Abtastfrequenz, nicht in die Fahrdynamikregelung eingehen. 

In vorteilhafter Weise fuhrt die Bestimmung wenigstens eines ortsfesten Bildpunktes und die 
anschliefiende Ermittlung der Bildkoordinaten des Bildpunktes in wenigstens zwei Bildern einer 
Bildsequenz zu einer schnellen und fehlertoleranten Bestimmung wenigstens eines Messwertes 
zur Fahrdynamikregelung aus den erzeugten Bildinformationen des Bildsensorsystems. 

Vorteilhaft ist die Bestimmung wenigstens eines Rotationsvektors des Kraftfahrzeuges und/oder 
wenigstens eines Bewegungsvektors des Kraftfahrzeuges aus den erzeugten Bildinformationen. 
Neben der Bestimmung der Giergeschwindigkeit und/oder des Gierwinkels und/oder der 
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Querbeschleunigung ist die alternative oder zusatziiche Bestimmung von weiteren 
Bewegungsvektoren in den drei Hauptachsen des Kraftfahrzeuges und/oder von weiteren 
Rotationsvektoren um dieselben besonders vorteilhaft. Die Bestimmung der 
Wankbeschleunigung und/oder der Wankgeschwindigkeit und/oder des Wankwinkels 
ermeglicht in vorteilhafter Weise die Erkennung und Vermeidung eines seitlichen Uberrollens 
des Kraftfahrzeuges. Durch geeignete Steuerung von Aktoren, beispielsweise von einzelnen 
Radbremsen im Rahmen der Fahrdynamikregelung, kann damit ein seitlicher Uberschlag des 
Kraftfahrzeuges verhindert werden. Bei Kraftfahrzeugen mit hohem Schwerpunkt, 
beispielsweise Kleintransportern, ftihrt diese Funktion in vorteilhafter Weise zu einer Erhohung 
der Verkehrssicherheit. Durch die Bestimmung der Nickbeschleunigung und/oder der 
Nickgeschwindigkeit und/oder des Nickwinkels werden Gefahren erkannt, die aus einer zu 
starken Nickbewegung des Kraftfahrzeugs entstehen. Im Rahmen der Fahrdynamikregelung 
wird beispielsweise ein Kippen des Kraftfahrzeuges Uber die Hinterachse durch geeignete 
Steuerung von Aktoren, beispielsweise von einzelnen Radbremsen, verhindert. Bei Fahrzeugen 
mit kurzen Radstanden, beispielsweise zweisitzigen Kraftfahrzeuge fur den Stadtverkehr, ftihrt 
diese Funktion zu einer Erhohung der Verkehrssicherheit. Vorteilhaft ist die Bestimmung von 
alien drei Bewegungsvektoren in den drei Hauptachsen des Kraftfahrzeuges und von den 
zugehorigen Rotationsvektoren um dieselben. Dies ermoglicht die dreidimensionale Erkennung 
der Fahrzeugbewegung. Wahrend herkommliche Fahrdynamikregelungen die 
Giergeschwindigkeit und die Querbeschleunigung zur Modellierung der Fahrzeugbewegung 
verwenden, ermoglicht das nachfolgend beschriebene Verfahren, die Vorrichtung und die 
Verarbeitungseinheit/Steuereinheit die dreidimensionale Modellierung der Fahrzeugbewegung. 
Diese zusatzlichen Informationen fiihren zu einer vorteilhaften Verbesserung der 
Fahrdynamikregelung, da die dreidimensionale Fahrzeugbewegung zuverlassig und vollstandig 
erfasst wird. 



Die Bestimmung der Giergeschwindigkeit und/oder des Gierwinkels und/oder der 
Querbeschleunigung des Kraftfahrzeuges aus den erzeugten Bildinformationen ermoglicht die 
Verwendung des Bildsensorsystems als Giergeschwindigkeitssensor und/oder als 
Querbeschleunigungssensor zur Fahrdynamikregelung. Dies ftihrt in vorteilhafter Weise zu 
einer Kostenverminderung, weil das Bildsensorsystem alternativ oder gleichzeitig die Funktion 
des Giergeschwindigkeitssensors oder des Querbeschleunigungssensors ubernimmt. Durch die 
vielfaltige Verwendung des Bildsensorsystems fur mehrere Funktionen werden die Kosten pro 
Funktion in vorteilhafter Weise gesenkt. Das Bildsensorsystem erm6glicht eine zuverlassige 
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und schnelle Bestimmung der Giergeschwindigkeit und/oder des Gierwinkels und/oder der 
Querbeschleunigung des Kraftfahrzeuges. 

In vorteilhafter Weise ermoglicht die Verwendung von mehr als einem Bildsensorsystem mit 
wenigstens zwei Bildsensoren, die im wesentlichen dieselbe Szene aufnehmen, eine 
Redundanzfunktion und/oder eine Plausibilitatsfunktion. Unter der Redundanzfunktion versteht 
man die Mittelwertbildung wenigstens eines Messwertes, insbesondere wenigstens eines 
Rotationsvektors und/oder wenigstens eines Bewegungsvektors. Dabei wird der Messwert durch 
wenigstens zwei Bildsensorsysteme unabhangig voneinander bestimmt. Die 
Plausibilitatsfunktion gestattet die UberprUfung wenigstens eines Messwertes, insbesondere 
wenigstens eines Rotationsvektors und/oder wenigstens eines Bewegungsvektors. Dabei wird 
der ermittelte Messwert eines Bildsensorsystems mit einem zweiten ermittelten Messwert eines 
anderen Bildsensorsystems verglichen und auf Plausibilitat iiberpriift. Dies ftihrt in vorteilhafter 
Weise zu einer ErhShung der Zuverlassigkeit des Verfahrens und der Vorrichtung. 

Besonders vorteilhaft ist ein Computerprogramm mit Programmcode-Mitteln, urn alle Schritte 
des nachfolgend beschriebenen Verfahrens durchzufuhren, wenn das Programm auf einem 
Computer ausgefiihrt wird. Die Verwendung eines Computerprogramms ermoglicht die schnelle 
und kostengunstige Anpassung des Verfahrens, beispielsweise durch Anpassung von 
Parametern an den jeweiligen Fahrzeugtyp und/oder Komponenten der Fahrdynamikregelung. 
Daneben wird die Wartung in vorteilhafter Weise verbessert, da die einzelnen 
Verfahrensschritte nicht in Hardware, sondern in Software realisiert sind. 

Vorteilhaft ist eine Sensoreinheit mit wenigstens einem Bildsensorsystem, wobei Mittel zur 
Bestimmung wenigstens eines Rotationsvektors und/oder wenigstens Bewegungsvektors 
vorgesehen sind. Neben der Verwendung der Sensoreinheit in Fahrdynamikregelungen kann die 
Sensoreinheit in vorteilhafter Weise auBerhalb der Kraftfahrzeugtechnik eingesetzt werden. Der 
Einsatzbereich der Sensoreinheit erstreckt sich dabei auf Anwendungsbereiche, wo wenigstens 
ein Rotationsvektor und/oder wenigstens ein Bewegungsvektor eines bewegten und/oder 
beschleunigten Objektes benotigt wird. Durch Anbringen der Sensoreinheit an dem Objekt 
werden die benotigten Vektoren aus den Bildinformationen der Umgebung gewonnen. Damit ist 
diese Sensoreinheit bei entsprechendem Einbau in ein Kraftfahrzeug in vorteilhafter Weise zur 
Bestimmung der Giergeschwindigkeit und/oder des Gierwinkels und/oder der 
Querbeschleunigung des Kraftfahrzeuges geeignet. Diese Sensoreinheit kann damit als Sensor 
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des nachfolgend beschriebenen Verfahrens und der nachfolgend beschriebenen Vorrichtung zur 
Fahrdynamikregelung eingesetzt werden. 

Weitere Vorteile ergeben sich aus der nachfolgenden Beschreibung von Ausfiihrungsbeispielen 
mit Bezug auf die Figuren und aus den abhangigen PatentansprOchen. 

Zeichnung 



Die Erflndung wird nachstehend anhand der in der Zeichnung dargestellten Ausfuhrungsformen 
naher erlautert. 



Es zeigen: 

Figur 1 ein Blockdiagramm der Fahrdynamikregelung in einem Kraflfahrzeug im bevorzugten 
Ausflihrungsbeispiel, 

Figur 2 eine Obersichtszeichnung der Fahrdynamikregelung in einem Kraflfahrzeug im 

bevorzugten Ausflihrungsbeispiel, 
Figur 3 eine Zeichnung der Anordnung der Komponenten der Fahrdynamikregelung in einem 

Kraflfahrzeug im bevorzugten Ausflihrungsbeispiel, 
Figur 4 ein Kraflfahrzeug mit einer Stereokamera im bevorzugten Ausflihrungsbeispiel, 
Figur 5 ein Ablaufdiagramm des Verfahrens zur Fahrdynamikregelung in einem Kraflfahrzeug 

im bevorzugten Ausflihrungsbeispiel, 
Figur 6 eine Sensoreinheit. 



Beschreibung von Ausfiihrungsbeispielen 

Figur 1 zeigt ein Blockdiagramm der Fahrdynamikregelung in einem Kraflfahrzeug 1 0 im 
bevorzugten Ausflihrungsbeispiel, bestehend aus Sensoren 12, Aktoren (Stellglieder) 14, 
dem Fahrerwunsch (Sollverhalten) 16, dem Fahrzeugverhalten (Istverhalten) 18, der 
Regelabweichung 20 und dem Fahrdynamikregler 22. Die Fahrdynamikregelung hat das 
Ziel, das Kraflfahrzeug 10 stabil und in der Spur zu halten. Durch Sensoren 12, die sich 
im Kraflfahrzeug 10 befinden, wird der Fahrerwunsch 16 ermittelt. Parallel wird durch 
Sensoren 12 das Fahrzeugverhalten 18 ermittelt. Aus dem Fahrerwunsch 16 und dem 
Fahrzeugverhalten 18 wird die Regelabweichung 20 berechnet. Die Regelabweichung 20 
dient als EingangsgrSBe fur den Fahrdynamikregler 22. Der Fahrdynamikregler 22 steuert 
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die Aktoren (Stellglieder) 14 mit dem Ziel, die Regelabweichung 20 zu minimieren. Als 
Aktoren 14 werden insbesondere die Radbrerasen und/oder der Motor des 
Kraftfahrzeuges 10 verwendet. Durch eine situationsabhangige Einstellung der Brems- 
und Antriebskrafte an den Radern des Kraftfahrzeuges 10 ist das Kraftfahrzeug 10 
individuell lenkbar und das gewtinschte Fahrverhalten wird auch in kritischen 
Fahrsituationen erreicht. Die Fahrdynamikregelung vermindert damit die Gefahr einer 
Kollision, die Gefahr eines Cberschlags und/oder die Gefahr, dass das Kraftfahrzeug 10 
von der Fahrbahn abkommt. 



Figur 2 zeigt eine Obersichtszeichnung der Fahrdynamikregelung in einem Kraftfahrzeug 
im bevorzugten Ausfuhrungsbeispiel, bestehend aus Sensoren 1 2, einer 
Verarbeitungseinheit/Steuereinheit 34 und Aktoren 14. Als Sensoren 12 werden eine 
Stereokamera 50, ein Lenkradwinkelsensor 28, ein Vordrucksensor 30 und 
Drehzahlsensoren 32 verwendet. Im bevorzugten Ausfuhrungsbeispiel wird die 
Stereokamera 50 zur Bestimmung der Giergeschwindigkeit, des Gierwinkels und der 
Querbeschleunigung verwendet. Unter der Giergeschwindigkeit des Kraftfahrzeuges 
versteht man die Rotationsgeschwindigkeit des Kraftfahrzeuges durch eine 
Drehbewegung des Kraftfahrzeuges urn seine Hochachse, wahrend die 
Querbeschleunigung eines Kraftfahrzeuges die Beschleunigung senkrecht zur 
Fahrtrichtung und parallel zur Fahrbahn beschreibt. Der Gierwinkel ist der Drehwinkel 
des Kraftfahrzeuges um seine Hochachse bezuglich einer zeitlich zuruckliegenden 
Position des Kraftfahrzeuges. Der Gierwinkel wird im bevorzugten Ausfuhrungsbeispiel 
aus der Giergeschwindigkeit als akkumulierter Gierwinkel bestimmt. Der 
Lenkradwinkelsensor 28 erfasst den Lenkradwinkel des Kraftfahrzeuges. Der 
Vordrucksensor 30 ist im Bremssystem angeordnet und dient zur Erkennung der 
Betatigung der Bremse durch den Fahrer. Vier Drehzahlsensoren 32 sind jeweils mit 
einem Rad des Kraftfahrzeuges verbunden und werden zur Bestimmung der 
Drehgeschwindigkeit der Rader des Kraftfahrzeuges verwendet. Die 
Verarbeitungseinheit/Steuereinheit 34 verarbeitet die Informationen der Sensoren 12. Sie 
weist eine interne Reglerhierarchie auf. Dabei unterscheidet man zwischen dem 
tiberlagerten Fahrdynamikregler 22 und den unterlagerten Reglern 36. Als unterlagerte 
Regler 36 unterscheidet man im bevorzugten Ausfuhrungsbeispiel zwischen dem 
Bremsschlupfregler, dem Antriebsschlupfregler und dem Motorschleppmomentregler. 
Zur Bestimmung des Fahrerwunsches werden Signale der Lenkradwinkelsensoren 28 und 
der Vordrucksensoren 30 ausgewertet. Zusatzlich gehen in die Berechnung des 
Fahrerwunsches die Haftreibwerte und die Fahrzeuggeschwindigkeit ein. Diese zusatzlich 
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berechneten Parameter werden aus den Signalen der Drehzahlsensoren 32, der 
Stereokamera 50 und der Vordrucksensoren 30 geschatzt. Das Fahrzeugverhalten wird 
aus den Signalen der Stereokamera 50 und einem in der 
Verarbeitungseinheit/Steuereinheit 34 aus den Sensorsignalen geschatzten 
Schwimmwinkel des Kraftfalirzeuges ermittelt. Der Fahrdynamikregler 22 regelt die 
beiden ZustandsgroBen Giergeschwindigkeit und Schwimmwinkel des Kraftfahrzeuges. 
AIs Aktoren 14 werden die Radbremsen 40 verwendet, die iiber das Hydroaggregat 38 
angesteuert werden. AIs weitere Aktoren 1 4 werden Uber das Steuergerat des 
Motormanagements 42 der ZUndwinkel 44, die Kraftstoffeinspritzung 46 und die 
Drosselklappe 48 geregelt. Im bevorzugten Ausfuhrungsbeispiel wird eine Stereokamera 
50 verwendet, die aus zwei Bildsensoren besteht, die die selbe Szene abbilden, allerdings 
unter einem etwas unterschiedlichen Sichtwinkel. AIs Bildsensoren werden CCD- 
Bildsensoren und/oder CMOS-Bildsensoren eingesetzt. Die Stereokamera 50 ubermittelt 
Bildinformationen der Fahrzeugumgebung an die Verarbeitungseinheit/Steuereinheit 34. 
Die Bildinformationen der Stereokamera 50 werden elektrisch und/oder optisch an die 
Verarbeitungseinheit/Steuereinheit 34 uber eine Signalleitung ubertragen. Alternativ oder 
zusatzlich ist eine Obertragung der Bildinformationen per Funk moglich. Die 
Stereokamera 50 hat im bevorzugten Ausfuhrungsbeispiel eine Reichweite von ca. 4 
Meter bis 40 Meter, einen vertikalen Offnungswinkel von etwa 17 Grad und eine 
Abtastrate von 10 Millisekunden. Die Verarbeitungseinheit/Steuereinheit 34 besteht aus 
mehreren in Figur 5 dargestellten Modulen, die im bevorzugten Ausfuhrungsbeispiel als 
Programme wenigstens eines Mikroprozessors ausgestaltet sind. Durch die beschriebene 
Vorrichtung und das nachfolgend beschriebene Verfahren wird im bevorzugten 
Ausfuhrungsbeispiel die Realisierung einer Fahrzeugstabilisierungszustandssensierung 
fur die Verwendung zur Fahrdynamikregelung mit einer Stereokamera 50 ermoglicht. 

Figur 3 zeigt eine Zeichnung der Anordnung der Komponenten der Fahrdynamikregelung 
in einem Kraftfahrzeug 10 im bevorzugten Ausfuhrungsbeispiel. Die Sensoren 28, 30, 32, 
48, 50, die Aktoren 38, 42 und die Verarbeitungseinheit/Steuereinheit 34 sind im 
bevorzugten Ausfuhrungsbeispiel uber einen CAN-Bus 54 verbunden. Bei dem CAN-Bus . 
54 handelt es sich um einen Kommunikationsdatenbus. Als Sensoren werden der 
Lenkradwinkelsensor 28, der Vordrucksensor 30, die vier Drehzahlsensoren 32 und die 
Stereokamera 50 verwendet. Als Aktoren sind das Steuergerat des Motormanagements 42 
mit der Drosselklappe 48 und das Hydroaggregat 38 eingezeichnet. Das Hydroaggregat 
38 ist uber Hydraulikleitungen 56 mit vier Radbremsen 40, und dem 
Bremskraftverstarker mit Hauptzylinder 52 verbunden. 
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Figur 4 zeigt ein Kraftfahrzeug 10 mit einer Stereokamera 50 im bevorzugten 
Ausfuhrungsbeispiel in einem ersten Betrachtungszeitpunkt 90 und einem zweiten 
Betrachtungszeitpunkt 92. Die Stereokamera 50 ist im Kraftfahrzeug 10 im Bereich des 
inneren Ruckspiegels hinter der Windschutzscheibe angebracht. Die Blickrichtung der 
Stereokamera 50 ist in Fahrtrichtung 58 des Kraftfahrzeuges 10. Die Stereokamera 50 
ermittelt dabei Bildinformationen der Kraftfahrzeugumgebung. In der 
Kraftfahrzeugumgebung ist ein erster ortsfester Bildpunkt 60 und ein zweiter ortsfester 
Bildpunkt 62 eingezeichnet. Ortsfeste Bildpunkte sind beispielsweise 
Fahrbahnmarkierungen und/oder Verkehrszeichen und/oder Pfahle und/oder Baume 
und/oder Randpfosten und/oder Hauser. In beiden Betrachtungszeitpunkten 90, 92 sind 
die Vektoren V jeweils von der Bildsensorobjektivmitte der beiden Bildsensoren der 
Stereokamera 50 zu den beiden ortsfesten Bildpunkten 60, 62 eingezeichnet. Der erste 
Index des Vektors V bezeichnet dabei die Bildsensoren, wahrend der zweite Index die 
Bildpunkte 60, 62 angibt. Der dritte Index gibt den Zeitpunkt des Vektors an. Damit 
bezeichnet beispielsweise V 2 12 den Vektor V vom zweiten Bildsensor zum ersten 
ortsfesten Bildpunkt 60 zum zweiten Betrachtungszeitpunkt 92. Eingezeichnet sind die 
Vektoren V m , V 121 , V n2 , V 122 , V 2 n, V 221 , V 212 und V 222 . Die X-Komponenten 
der Vektoren andern sich bei einer Gierbewegung 94 des Kraftfahrzeuges 10 von einem 
ersten Betrachtungszeitpunkt 90 zu einem zweiten Betrachtungszeitpunkt 92. Hierbei 
geht man von zwei fahrzeugfesten karthesischen Koordinatensystemen aus. Die 
Nullpunkte der Koordinatensysteme liegen im bevorzugten Ausfuhrungsbeispiel jeweils 
in Bildsensorobjektivmitte. Die Verarbeitungseinheit/Steuereinheit berechnet fur die 
Fahrstabilitatserkennung synchron aus den Bildinformationen der beiden Bildsensoren 
der Stereokamera 50 die Vektoren zu einer Vielzahl von Bildpunkten 60, 62 und/oder 
einem Cluster von Pixeln. Dabei wird die vektorielle Veranderung zwischen den 
Einzelbildern betrachtet. Als Cluster von Pixeln werden beispielsweise hundert Pixel 
verwendet. Die Verwendung einer grofieren und/oder kleineren Anzahl ist alternativ 
moglich. Andern sich die X-Komponenten der Vektoren der beiden Bildsensoren 60, 62 
der Stereokamera 50 von einem Abtastvorgang zum nachsten, also von einem ersten' 
Betrachtungszeitpunkt 90 zu einem zweiten Betrachtungszeitpunkt 92, fur gleiche 
Abscanpunkte zu stark, liegt ein instabiler Fahrzustand vor. Die 
Verarbeitungseinheit/Steuereinheit leitet die Rotations information urn die Z-Achse 
und/oder die Querbeschleunigung des Kraftfahrzeuges aus den Einzelbildervektoren ab 
und berechnet daraus die Giergeschwindigkeit und/oder den akkumulierten Gierwinkel 
und/oder die Querbeschleunigung. 
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Figur 5 zeigt ein Ablaufdiagramm des Verfahrens zur Fahrdynamikregelung in einem 
Kraftfahrzeug im bevorzugten Ausftthrungsbeispiel. Aus den Bildinformationen 68 der 
Stereokamera wird die Giergeschwindigkeit 80 und/oder der Gierwinkel 82 und/oder die 
Querbeschleunigung 84 bestimmt. Die Bildinformationen 68 werden dem Modul 70 zur 
Vorverarbeitung zugeleitet. Das Modul 70 wird insbesondere zur Verbesserung der 
Bildqualitat und/oder zur Beseitigung von Stdrungen verwendet. In Modul 72 werden 
ortsfeste Bildpunkte bestimmt. Ortsfeste Bildpunkte sind beispielsweise 
Fahrbahnmarkierungen und/oder Verkehrszeichen und/oder Pfahle und/oder Baume 
und/oder Randpfosten und/oder Hauser. Eine Unterscheidung zu beweglichen 
Bildpunkten ist dadurch moglich, dass die Komponente der Abstandsanderung in 
Fahrzeuglangsrichtung zu diesen beweglichen Bildpunkten sich in erster Naherung mit 
anderer Geschwindigkeit als die Eigengeschwindigkeit des Kraftfahrzeugs andert. Damit 
ist eine Unterscheidung zwischen beweglichen und ortsfesten Bildpunkten moglich. Bei 
Bewegungen von Bildpunkten senkrecht zur Fahrtrichtung des Kraftfahrzeuges, 
beispielsweise ein kreuzendes anderes Kraftfahrzeug, werden weitere Kriterien benotigt. 
Bei einem kreuzenden Kraftfahrzeug werden beispielsweise die Raddrehungen des 
kreuzenden Kraftfahrzeugs als Nicht-Berucksichtigungs-Kriterium verwendet und 
dadurch bewegliche Bildpunkte sicher erkannt. Als alternatives oder zusatzliches 
Kriterium ist ein ortsfester Bildpunkt jeder Bildpunkt, bei dem sich zwischen zwei 
Messzyklen die Bildkoordinaten des Bildpunktes nur so andern, wie aufgrund der 
Fahrgeschwindigkeit und dem Kurvenradius des Kraftfahrzeuges abgeschatzt wird. Dabei 
konnen Messdaten weiterer Sensoren verwendet werden, wie Lenkwinkelsensoren oder 
Drehzahlsensoren. Die Bestimmung von ortsfesten Bildpunkten im Modul 72 basiert auf 
bekannten Methoden der Bildverarbeitung, insbesondere Bildsegmentierung, 
Merkmalsermittlung und Objekterkennung. Bei der Stereokamera lassen sich 
insbesondere durch das Verfahren der Triangulation die Bildkoordinaten bestimmen. Das 
Modul 74 dient zur Ermittlung von Bildkoordinaten der bestimmten ortsfesten 
Bildpunkte. Bei einem einzelnen Bildpunkt werden die Bildkoordinaten direkt bestimmt, 
wahrend bei einem Cluster von Pixeln ein Schwerpunkt des Clusters ermittelt wird und 
daraus die Bildkoordinaten bestimmt werden. Ein ortsfester Bildpunkt ist demnach 
entweder durch einen einzelnen Punkt (Pixel) oder ein Cluster von Pixeln festgelegt. Die 
Bildkoordinaten der bestimmten ortsfesten Bildpunkte werden entweder im Modul 76 
gespeichert und/oder zum Modul 78 zur Bestimmung der Ausgangswerte weitergeleitet. 
Aus den gespeicherten Bildkoordinaten in Modul 76 der vorhergehenden Bilder und den 
Bildkoordinaten des aktuellen Bildes werden in Modul 78 als Ausgangswerte die 
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Giergeschwindigkeit 80 und/oder der Gierwinkel 82 und/oder die Querbeschleunigung 84 
bestimmt. 

Figur 6 zeigt eine Sensoreinheit 64, bestehend aus einem Bildsensorsystem 50 und einem 
Verarbeitungsmittel 66. Das Bildsensorsystem besteht aus zwei Bildsensoren, die im 
wesentlichen die selbe Szene aufhehmen. Alternativ ist die Verwendung einer 
Stereokamera moglich. Als Bildsensoren sind beispielsweise CCD-Bildsensoren und/oder 
CMOS-Bildsensoren einsetzbar. Ober die Signalleitung 67 werden die Bildinformationen 
vom Bildsensorsystem 50 an das Verarbeitungsmittel 66 ubertragen. Die Ubertragung 
erfolgt dabei elektrisch und/oder optisch. Alternativ oder zusatzlich ist eine Obertragung 
per Funk moglich. In diesem Ausftihrungsbeispiel werden entsprechend dem 
beschriebenen Verfahren in Figur 5 die Gierbewegung 86 und/oder die Querbewegung 88 
ermittelt und als Ausgangswerte Giergeschwindigkeit 80 und/oder Gierwinkel 82 
und/oder Querbeschleunigung 84 der Sensoreinheit 64 zur Verfugung gestellt. Das 
Verarbeitungsmittel 66 besteht aus mehreren in Figur 5 dargestellten Modulen, die in 
diesem Ausfuhrungsbeispiel als Programme wenigstens eines Mikroprozessors 
ausgestaltet sind. In diesem Ausfuhrungsbeispiel bildet das Bildsensorsystem 50 und das 
Verarbeitungsmittel 66 eine Einheit. Alternativ ist eine Trennung der Komponenten 
Bildsensorsystem 50 und Verarbeitungsmittel 66 moglich. In einer weiteren Ausfuhrung 
der Sensoreinheit 64 sind weitere Mittel zur Bestimmung wenigstens eines weiteren 
Rotationsvektors und/oder wenigstens eines weiteren Bewegungsvektors vorgesehen. 
Durch die Verwendung weiterer Bildsensorsysteme wird in einer weiteren Variante eine 
Redundanz und/oder eine Plausibilitatsfunktion ermoglicht. Das Einsatzgebiet der 
beschriebenen Sensoreinheit 64 ist nicht auf die Kraftfahrzeugtechnik beschrankt. 
Vielmehr ermSglicht die Sensoreinheit 64 die Bestimmung wenigstens eines 
Rotationsvektors und/oder die Bestimmung wenigstens eines Bewegungsvektors 
allgemein bezuglich der Sensoreinheit. 

Das beschriebene Verfahren und die Vorrichtung sind nicht auf eine einzelne 
Stereokamera beschrankt, die in Fahrtrichtung des Kraftfahrzeuges ausgerichtet ist. 
Vielmehr ist die Verwendung wenigstens eines Bildsensorsystems moglich, wobei 
wenigstens zwei Bildsensoren vorgesehen sind, die im wesentlichen die selbe Szene 
aufhehmen. Bei mehr als zwei Bildsensoren wird die Genauigkeit des Verfahrens erhoht. 
Neben dem Einbau der Stereokamera und/oder des Bildsensorsystems mit wenigstens 
zwei Bildsensoren in Fahrtrichtung des Kraftfahrzeuges sind alternative 
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Einbaumoglichkeiten denkbar. Beispielsweise ist der Einbau entgegen der Fahrtrichtung 
und/oder zur Seite moglich. 

In einer weiteren Variante des beschriebenen Verfahrens, der Vorrichtung und der 
Sensoreinheit werden neben den CCD-Bildsensoren und/oder den CMOS-Bildsensoren 
alternativ oder zusatzlich andere Bildsensoren verwendet, die Bildinformationen 
erzeugen, beispielsweise Zeilensensoren. Bildinformationen sind dabei Informationen die 
in elektromagnetischer Strahlung im Ultraviolettenstrahlungsbereich, im 
Infrarotenstrahlungsbereich und/oder im sichtbaren Strahlungsbereich des 
elektromagnetischen Strahlungsspektrums enthalten sind. Als Bildinformationen werden 
insbesondere die Intensitat und/oder die Wellenlange und/oder die Frequenz und/oder die 
Polarisation verwendet. 

In einer Variante des beschriebenen Verfahrens und der Vorrichtung wird aus den 
erzeugten Bildinformationen wenigstens ein Rotationsvektor und/oder wenigstens ein 
Bewegungsvektor des Kraftfahrzeuges bestimmt. Ein Rotationsvektor ist ein Drehvektor 
des Kraftfahrzeuges urn eine beliebige Achse, wobei vorzugsweise Rotationsvektoren in 
eine Hauptachse des Kraftfahrzeuges bestimmt werden. Die Hauptachsen des 
Kraftfahrzeuges sind die Hochachse, die Querachse und die Langsachse. Ein 
Bewegungsvektor des Kraftfahrzeuges ist ein Vektor der Bewegung des Schwerpunktes 
des Kraftfahrzeuges in eine beliebige Richtung. Es werden vorzugsweise 
Bewegungsvektoren in eine Hauptachse des Kraftfahrzeuges bestimmt. Dabei wird die 
Gierbeschleunigung und/oder die Nickbeschleunigung und/oder die Wankbeschleunigung 
und/oder Giergeschwindigkeit und/oder die Nickgeschwindigkeit und/oder die 
Wankgeschwindigkeit und/oder der Gierwinkel und/oder der Nickwinkel und/oder der 
Wankwinkel und/oder die Querbeschleunigung und/oder die Langsbeschleunigung 
und/oder die Vertikalbeschleunigung und/oder die Quergeschwindigkeit und/oder die 
Langsgeschwindigkeit und/oder die Vertikalgeschwindigkeit und/oder den Querweg 
und/oder den Langsweg und/oder den Vertikalweg des Kraftfahrzeuges bestimmt. Der 
Begriff „Nick" bezeichnet einen Rotationsvektor urn die Querachse des Kraftfahrzeuges, 
also senkrecht zur Hochachse und zur Langsachse. Beispielsweise ist die 
Nickbeschleunigung die Rotationsbeschleunigung des Kraftfahrzeuges in Richtung der 
Querachse des Kraftfahrzeuges. Dagegen bezeichnet der Begriff Wank einen 
Rotationsvektor urn die Langsachse des Kraftfahrzeuges. Beispielsweise ist die 
Wankbeschleunigung die Rotationsbeschleunigung des Kraftfahrzeuges in Richtung der 
Langsachse des Kraftfahrzeuges. Weiter bezeichnet der Begriff „VertikaI" einen 
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Bewegungsvektor in Richtung der Hochachse des Kraftfahrzeuges, wahrend die Begriffe 
„Langs" und „Quer" einen Bewegungsvektor in Richtung der Langsachse und der 
Querachse beschreiben. In einer weiteren vorteilhaften Variante des beschriebenen 
Verfahrens und der Vorrichtung werden alio drei beschriebenen Bewegungsvektoren in 
den drei Hauptachsen des Kraftfahrzeuges mit den zugehorigen Rotationsvektoren urn 
dieselben bestimmt. Dabei wird die Fahrzeugbewegung dreidimensional erkannt und 
model liert. 



In einer weiteren Variante des beschriebenen Verfahrens und der Vorrichtung werden 
wenigstens zwei Bildsensorsysteme mit wenigstens zwei Bildsensoren verwendet, die im 
wesentlichen die selbe Szene aufhehmen, insbesondere wenigstens zwei Stereokameras. 
Dies ermoglicht eine Redundanzfunktion und/oder eine Plausibilitatsfunktion des 
vorstehend beschriebenen Verfahrens. Mittels der Redundanzfunktion wird wenigstens 
ein Rotationsvektor und/oder wenigstens ein Bewegungsvektor unabhangig von beiden 
Bildsensorsystemen bestimmt und durch Mittelwertbildung der Messwert ermittelt. 
Plausibilitatsfunktion ermoglicht die Cberprufung der Messwerte der beiden 
Bildsensorsysteme, indem die Messwerte verglichen werden. 

In einer Variante des beschriebenen Verfahrens und der Vorrichtung werden als Sensoren 
neben dem wenigstens einen Bildsensorsystem wenigstens ein 

Giergeschwindigkeitssensor und/oder wenigstens ein Querbeschleunigungssensor zur 
Fahrdynamikregelun'g verwendet. In dieser vorteilhaften Variante wird das 
Bildsensorsystem zur Plausibilitatspriifung eingesetzt. Die Messwerte des 
Giergeschwindigkeitssensors und/oder des Querbeschleunigungssensors werden mit dem 
von dem Bildsensorsystem bestimmten wenigstens einen Messwert verglichen. Alternativ 
oder zusatzlich wird das Bildsensorsystem zur redundanten Bestimmung von wenigstens 
einem Messwert eingesetzt. Dies geschieht durch Mittelwertbildung des wenigstens einen 
Messwertes des Bildsensorsystems mit wenigstens einem Messwert des 
Giergeschwindigkeitssensors und/oder wenigstens einem Messwert des 
Querbeschleunigungssensors. Giergeschwindigkeitssensoren sind Sensoren zur Messung 
der Giergeschwindigkeit eines Kraftfahrzeuges. Querbeschleunigungssensoren sind 
Tragheitssensoren zur Bestimmung der Querbeschleunigung eines Kraftfahrzeuges. 
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20.06.03 Fr/Kei 

ROBERT BOSCH GMBH, 70442 Stuttgart 



Fahrdvna mikregelung mit Bildsensorsvstem 



1 . Verfahren zur Fahrdynamikregelung in einem Kraftfahrzeug, 

- wobei wenigstens ein Sensor wenigstens einen Messwert erfasst, 

- wobei in Abhangigkeit von dem wenigstens einen Messwert wenigstens ein Aktor zur 
Fahrdynamikregelung angesteuert wird, 

dadurch gekennzeichnet, dass zur Fahrdynamikregelung wenigstens ein Bildsensorsystem 
Bildinformationen von der Kraftfahrzeugumgebung erzeugt, wobei wenigstens zwei 
Bildsensoren vorgesehen sind, die im wesentlichen dieselbe Szene aufnehmen, insbesondere 
dass das Bildsensorsystem wenigstens eine Stereokamera ist. 

2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass aus den erzeugten 
Bildinformationen wenigstens ein Messwert bestimmt wird, wobei der Messwert zur 
Fahrdynamikregelung verwendet wird. 

3. Verfahren nach einem der AnsprOche 1 oder 2, dadurch gekennzeichnet, dass 

- aus den erzeugten Bildinformationen wenigstens ein ortsfester Bildpunkt bestimmt wird, 

- die Bildkoordinaten des wenigstens einen ortsfesten Bildpunktes in wenigstens zwei, 
vorzugsweise aufeinanderfolgenden, Bildern einer Bildsequenz ermittelt werden, 

- aus den ermittelten Bildkoordinaten der wenigstens eine Messwert bestimmt wird, wobei der 
Messwert zur Fahrdynamikregelung verwendet wird. 

4. Verfahren nach einem der vorhergehenden Anspriiche, dadurch gekennzeichnet, dass 

aus den erzeugten Bildinformationen als Messwert wenigstens ein Rotationsvektor des 
Kraftfahrzeuges und/oder wenigstens ein Bewegimgsvektor des Kraftfahrzeuges bestimmt wird. 
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5. Verfahren nach einem der vorhergehenden Anspruche, dadurch gekennzeichnet, dass 
aus den erzeugten Bildinformationen als Messwert die Giergeschwindigkeit und/oder der 
Gierwinkel und/oder die Querbeschieunigung des Kraflfahrzeuges bestimmt wird. 

6. Vorrichtung zur Fahrdynamikregelung in einem Kraftfahrzeug mit wenigstens einem 
Sensor zur Erfassung wenigstens eines Messwertes und wenigstens einem Aktor, der durch eine 
Verarbeitungseinheit/Steuereinheit in Abhangigkeit von dem wenigstens einen Messwert zur 
Fahrdynamikregelung angesteuert wird, dadurch gekennzeichnet, dass wenigstens ein Sensor als 
Bildsensorsystem konfiguriert ist, wobei wenigstens zwei Bildsensoren vorgesehen sind, die im 
wesentlichen dieselbe Szene aufhehmen, insbesondere dass das Bildsensorsystem wenigstens 
eine Stereokamera ist, wobei das Bildsensorsystem Bildinformationen von der 
Kraftfahrzeugumgebung erzeugt. 

7. Vorrichtung nach Anspruch 6, dadurch gekennzeichnet, dass die 
Verarbeitungseinheit/Steuereinheit Mittel zur Bestimmung wenigstens eines Messwertes aus 
den erzeugten Bildinformationen aufweist, wobei der Messwert zur Fahrdynamikregelung 
verwendet wird. 

8. Vorrichtung nach einem der Anspruche 6 oder 7, dadurch gekennzeichnet, dass 

- die VerarbeitungseinheitfSteuereinheit Mittel zur Bestimmung von ortsfesten Bildpunkten aus 
den erzeugten Bildinformationen hat, 

- die Verarbeitungseinheit/Steuereinheit Mittel zur Ermittlung der Bildkoordinaten des 
wenigstens einen ortsfesten Bildpunktes in wenigstens zwei, vorzugsweise 
aufeinanderfolgenden, Bildern einer Bildsequenz aufweist, 

- in der Verarbeitungseinheit/Steuereinheit Mittel zur Bestimmung des Messwertes aus den 
ermittelten Bildkoordinaten vorgesehen sind, wobei der Messwert zur Fahrdynamikregelung 
verwendet wird. 

9. Vorrichtung nach einem der Anspruche 6 bis 8, dadurch gekennzeichnet, dass die 
Verarbeitungseinheit/Steuereinheit Mittel zur Bestimmung wenigstens eines Rotationsvektors 
des Kraftfahrzeuges und/oder wenigstens eines Bewegungsvektors des Kraftfahrzeuges aus den 
erzeugten Bildinformationen aufweist. 
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10. Vorrichtung nach einem der Anspriiche 6 bis 9, dadurch gekennzeichnet, dass die 
Verarbeitungseinheit/Steuereinheit Mittel zur Bestimmung der Giergeschwindigkeit und/oder 
des Gierwinkels und/oder der Querbeschleunigung des Kraftfahrzeuges aus den erzeugten 
Bildinformationen aufweist. 

11. Verarbeitungseinheit/SteuereinheitzurFahrdynamikregelung in einem Kraftfahrzeug, 

- mit Mitteln zur Verarbeitung von wenigstens einem Messwert, der von wenigstens einem 
Sensor erfasst wird, wobei der Messwert zur Fahrdynamikregelung verwendet wird, 

- mit Mitteln zur Steuerung wenigstens eines Aktors zur Fahrdynamikregelung, 

dadurch gekennzeichnet, dass Mittel zur Verarbeitung von Bildinformationen wenigstens eines 
Bildsensorsystems vorgesehen sind, insbesondere wenigstens einer Stereokamera, wobei das 
Bildsensorsystem wenigstens zwei Bildsensoren umfasst, die im wesentlichen dieselbe Szene 
aufhehmen. 

12. Verarbeitungseinheit/Steuereinheit nach Anspruch 1 1, dadurch gekennzeichnet, dass 
die Verarbeitungseinheit/Steuereinheit Mittel zur Bestimmung wenigstens eines 
Rotationsvektors des Kraftfahrzeuges, insbesondere der Giergeschwindigkeit und/oder des 
Gierwinkels, und/oder wenigstens eines Bewegungsvektors des Kraftfahrzeuges, insbesondere 
die Querbeschleunigung, aus den erzeugten Bildinformationen aufweist. 

13. Computerprogramm mit Programmcode-Mitteln, urn alle Schritte von jedem 
beliebigen der AnsprQche 1 bis 5 durchzufuhren, wenn das Programm auf einem Computer 
ausgefiihrt wird. 

14. Sensoreinheit mit wenigstens einem Bildsensorsystem, insbesondere wenigstens einer 
Stereokamera, 

- wobei wenigstens zwei Bildsensoren vorgesehen sind, die im wesentlichen dieselbe Szene 
aufnehmen, 

- wobei die Sensoreinheit Bildinformationen der Umgebung erzeugt, 

dadurch gekennzeichnet, dass Mittel zur Bestimmung wenigstens eines Rotationsvektors 
und/oder wenigstens eines Bewegungsvektors vorgesehen sind. 
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Fahrdyna mikreeelung mit Bildsensorsvstem 



Zusammenfassung 



Es wird ein Verfahren zur Fahrdynamikregelung in einem Kraftfahrzeug vorgeschlagen, wobei 
wenigstens ein Sensor wenigstens einen Messwert erfasst, wobei in Abhangigkeit von dem 
wenigstens einen Messwert wenigstens ein Aktor zur Falirdynamikregelung angesteuert wird, 
wobei zur Fahrdynamikregelung wenigstens ein Bildsens'orsystem Bildinformatiorien von der 
Kraftfahrzeugumgebung erzeugt, wobei wenigstens zwei Bildsensoren vorgesehen sind, die im 
wesentlichen dieselbe Szene aufnehmen. 

(Figur 3). . . .. ■ , • 



